-
Notifications
You must be signed in to change notification settings - Fork 87
New issue
Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.
By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.
Already on GitHub? Sign in to your account
Atomized model operation #1227
Atomized model operation #1227
Conversation
Hello @kasyanovse! Thanks for updating this PR. We checked the lines you've touched for PEP 8 issues, and found:
Comment last updated at 2023-12-22 08:59:54 UTC |
Codecov ReportAttention:
Additional details and impacted files@@ Coverage Diff @@
## master #1227 +/- ##
==========================================
- Coverage 79.47% 78.45% -1.02%
==========================================
Files 145 149 +4
Lines 9928 10109 +181
==========================================
+ Hits 7890 7931 +41
- Misses 2038 2178 +140 ☔ View full report in Codecov by Sentry. |
Закрыт в связи с неактуальностью.
Linked:
План:
Разбираемся почему плохо
Мутации
H0: Нет разницы в положении внутри поколения между пайплайнами с определенными мутациями
H1: ~H0
Выводы и результаты:
WindowSizeSelector
из Topological forecaster #1186.Код
Вывод
НАЧАЛЬНЫЙ ВЫВОД БЕЗ АВТОПОДБОРА ОКНА
С АВТОПОДБОРОМ ОКНА
С АВТОПОДБОРОМ ОКНА И БЕЗ НЕПОЛЕЗНЫХ МУТАЦИЙ
Сравнение метрик пайплайнов с atomized и nonatomized
Производится единственный запуск
Fedot
без фиксацииseed
на заданных данных.Считаются метрики всех моделей в процессе оптимизации в контексте одного поколения, значения метрик разделяются на группу метрик от
atomized
и группу метрик остальных моделей.H0: распределения
atomized
иnon-atomized
метрик в одном поколении имеют одинаковые матожиданияH1: ~H0
Вывод: H0 отвергается, на одном поколении большой мощности матожидания метрик не совпадают для
atomized
иnon-atomized
.Листинг кода стат тестов
Результаты на одном запуске
fedot
в одном поколенииРезультаты на нескольких запусках
fedot
при фиксированных данныхdiff
- абсолютная разница междуnonatomized mean
иatomized mean
atomized mean metric
nonatomized mean metric
diff